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(54) Title: CAMERA TRACKING SYSTEM FOR A VIRTUAL TELEVISION OR VIDEO STUDIO 
(54) Bezeichnung: KAMERA TRACKING SYSTEM FUR EIN VIRTUELLES FERNSEH- ODER VXDEOSTUDIO 
(57) Abstract 

The invention relates to a camera tracking system for a 
virtual television or video studio, used to determine the position 
and/or orientation of a recording camera and comprising at 
least three emitter devices for emitting electromagnetic radiation, 
which emitter devices (20) can be mechanically coupled to the 
recording camera (12). The camera tracking system further 
comprises at least two detecting devices (14) for detecting the 
position of the emitter devices on the basis of the electromagnetic 
radiation emitted by said emitter devices, each detecting device 
being able to detect several emitter devices. A computer unit 
evaluates the electromagnetic radiation detected by the detecting 
devices and emitted by the emitter devices and determines the 
position and/or orientation of the at least three emitter devices 
in relation to the at least two detecting devices. 

(57) Zusammcnfassung 

Das Kamera Tracking System fur ein virtuelles Femseh- 
oder Videostudio zur Bestimmung der Position und/oder Aus- 
richtung einer Aufnahmekamera weist mindestens drei Emitter- 
vorrichtungen zur Abgabe von elektromagnetischer Strahlung 
auf, wobei die Emittervorrichtungen (20) mechanisch mit der 

Aufnahmekamera (12) koppelbar sind. Femer weist das Kamera Tracking System mindestens zwei Detektorvorrichtungen (14) zur Erfas- 
sung der Lage der Emittervorrichtungen anhand der von den Emittervorrichtungen abgegebenen elektromagnetischen Strahlung auf, wobei 
mit jeder Detektorvorrichtung mehrere Emittervorrichtungen erfassbar sind. Eine Recheneinheit wertct die von den Detektorvorrichtungen 
erfasste und von den Emittervorrichtungen abgegebene elektromagnetische Strahlung aus und ermittelt die Position und/oder Ausrichtung 
der mindestens drei Emittervorrichtungen relativ zu den mindestens zwei Detektorvorrichtungen. 
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KAMERA TRACKING SYSTEM FUR EIN VIRTUELLES FERNSEH- ODER 

VmEOSTUDIO 

Die vorliegende Erfindung betrifft ein neuartiges Kamera Tracking System ftir ein virtuel- 
les Femseh- oder Videostudio. 

Zur Produktion von virtuellen Film- oder Videosequenzen warden in einer speziellen Vor- 
richtung die von einer Kamera aufgenomnienen Bilder, beispieisweise einer Person^ mit 
einem in Wirklichkeit nicht vorhandenen (deshalb auch virtuellen) Hintergrund (electronic 
set) Oder anderen, in der Vorrichtung erzeugten Details kombiniert (sogenanntes virtuelles 
Studio). Damit die von der Kamera aufgenommene Person prazise und lagetreu in den vir- 
tuell erstellten Hintergrund integriert werden karni, muB die jeweils momentan herrschende 
Position und Orientierung der Aufiiahmekamera (Studiokamera) bekannt sein, 

Bisher wurde die Position der Aufiiahmekamera ausgehend von einer Null-Stellung durch 
Messen des zuriickgelegten Weges und die Orientierung der Kamera durch Messen der 
Schwenk-, Nick- und RoUwinkel uber entsprechende Inkrementalgeber errechnet 
(Sommerhauser, F.: Das virtuelle Studio; in: FERNSEH- UND KINO-TECHNIK, 50. 
Jhrg., 1996, Nr. 1-2, Seiten 11-15, 18-22). Hierzu ist es notwendig, an der Kamera und an 
ihrem Stativ (Dreibein) an jedem Gelenk und an jeder Achse entsprechende Inkremental- 
geber zu installieren. Dieses bekannte System erfordert einen relativ hohen Aufwand an 
MeBtechnik. 

Aus der Intemer Broadcast Convention IBC '97, Convention Publication Seiten 284 - 289 
und WO-A-94/05118 ist jeweils ein Kamera Tracking System bekannt, bei dem an der 
Kamera eine zur Studiodecke zeigende Hilfskamera angebracht ist, die Streifenkodierungen 
aufweisende Markierungen an der Studiodecke erfaBt. Uber die von der Kamera erfaBten 
Streifenkodierungen kann ein entsprechender Rechner dann die exakte Position der Kamera 
im Studio bestimmen. Uber dieses bekannte Kamera Tracking System kann zwar der 
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Standort der Kamera im Studio bestimmt werden, jedoch miissen nach wie vor Inkremen- 
talgeber eingesetzt werden, um die Hohe der Kamera uber dem Boden, den Schwenk-, den 
Roll- und den Nickwinkel der Kamera zu bestimmen. 

Aus EP-A-0 689 356 ist ein sprachgesteuertes Video-System bekannt, bei dem eine Video- 
Kamera durch die Stimme einer Person ausgerichtet wird. Dabei sendet die Person liber 
entsprechende Emitter Signale an das Video-System aus, so daB die Video-Kamera den 
Bewegungen der Person folgen kann, um die Person permanent zu erfassen. 

Der vorliegenden Erfindung liegt die Aufgabe zugrunde in Kamera Tracking System zu 
schaffen, das die Position und die Orientiening einer frei im Raum bewegbaren Kamera 
prazise, schnell und zuverlassig bestimmt. 

Zur Losung dieser Aufgabe wird erfindirngsgemaB ein Kamera Tracking System vorge- 

schlagen, das versehen ist mit 

mindestens drei Emittervorrichtungen zur Abgabe von elektromagnetischer Strah- 
lung, wobei die Emittervorrichtungen mechanisch mit der Aufiiahmekamera koppel- 
bar sind, 

mindestens zwei Detektorvorrichtungen zur Erfassung der Lage der Emittervorrich- 
tungen anhand der von den Emittervorrichtungen abgegebenen elektromagnetischen 
Strahlung, wobei mit jeder Detektorvorrichtung mehrere Emittervorrichtungen er- 
fafibar sind, und 

einer Recheneinheit zur Auswertung der von den Detektorvorrichtungen erfaBten 
und von den Emittervorrichtungen abgegebenen elektromagnetischen Strahlung und 
zur Ermittlung der Position und/oder Ausrichtung der mindestens drei Emittervor- 
richtungen relativ zu den mindestens zwei Detektorvorrichtungen. 

Bei dem erfmdungsgemaBen Kamera Tracking System senden mindestens drei Emittervor- 
richtungen, die entweder direkt mit der Aufiiahmekamera oder indirekt, beispielsweise liber 
das Stativ der Aufhahmekamera mit dieser koppelbar sind, elektromagnetische Strahlung 
aus, Dabei konnen die Emittervorrichtungen als aktiv arbeitende oder passiv arbeitende 
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Vorrichtungen ausgebildet sein. Wahrend einer aktiv arbeitende Vomchtung elektro- 
magnetische Strahlung erzeugt und abstrahlt, arbeitet eine passive Emittervorrichtung nach 
dem Reflektionsprinzip, indem elektromagnetische Strahlung reflektiert wird. Die von den 
Emittervorrichtungen kommende elektromagnetische Strahlung wird von mindestens zwei 
Detektorvorrichtungen erfaBt. Jede Detektcrvorrichtung ist dabei in der Lage, mehrere 
Emittervorrichtungen gleichzeitig selektiv zu erfassen, wobei dann mittels jeder Detektor- 
vorrichtung die relative Lage der erfafiten Emittervorrichtungen bestimmbar ist. Ob eine 
Detektorvorrichtung ein oder mehrere Emittervorrichtungen erfaBt, hangt von der Ausrich- 
tung der Aufiiahmekamera ab, mit der die Emittervorrichtungen mechanisch direkt oder in- 
direkt gekoppelt sind. Jede Detektorvorrichtung ist v/iederam an eine Recheneinlieii ange- 
schlossen, die die von den Detektorvorrichtungen erfaBten, von den Emittervorrichtungen 
kommenden elektromagnetischen Strahlungen auswertet, indem sie anhand der Lagebe- 
stimmung der mit jeder der Detektorvorrichtungen erfaBten Emittervorrichtungen insgesamt 
die Position und/oder Ausrichtung der mindestens drei Emittervorrichtungen relativ zuein- 
ander ermittelt. 

Ein nach dieser erfmdungsgemaBen Lehre ausgebildetes Kamera Tracking System hat den 
Vorteil, daB bei einer Bewegung der Studio-ZAufoahmekamera die Emittervorrichtung un- 
mittelbar mitbewegt wird und daB die Position der Emittervorrichtung im Raum von en im 
Studio verteilten Erfassungskameras drahtlos erfaBt wird. Die aufgenommenen Daten wer- 
den dann unmittelbar von dem Rechner ausgewertet, so daB dem Rechner die momentane 
Position und Ausrichtung der Aufiaahmekamera im Studio bekannt ist und diese fur die 
virtuellen Femseh- oder Videosequenzen genutzt werden kann. 

Die Anbringung der Emittervorrichtungen direkt an der Aufiiahmekamera bzw. an dessen 
Gehause oder an einem die Aufiiahmekamera tragenden Stativ hat weiterhin den Vorteil, 
daB das erfindungsgemaBe Kamera Tracking System neben der Bestimmung der Position 
der Kamera auf dem FuBboden (z.B. im Studio) auch die momentane Hohe der Kamera 
uber dem Boden, der momentane Nick-, der momentane Roll- und der momentane 
Schwenkwinkel bestimmt werden konnen. Hierdurch ist es beispielsweise moglich, daB der 
Kameramann seine Studiokamera auf der Schulter transport! ert, um eine optimale Bewe- 
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gungsfreiheit zur Aufhahme der Objekte zu erhalten. In diesem Fall kann das erfindungs- 
gemaBe Kamera Tracking System sowohl die Position im Studio als auch die Lage (Hohe, 
Roll-, Nick- und Schwenkwinkel) der Kamera prazise, schnell und zuverlassig bestimmen. 

Zoom und Fokus der Studiokamera werden zweckmaBigerweise mit Inkremental-Weg- 
gebem bestimmt, die in die Optik integriert sind und die Stellung der betreffenden opti- 
schen Elemente erfassen. Diese Weggeber oder allgemein Detektoren sind ebenfalls mit der 
Recheneinheit verbunden, um zusammen mit der ermittelten Position und Ausrichtung der 
Studiokamera den Studio-Hintergrund zu generieren. 

Bei dem erfmdungsgemaBen Kamera Tracking System ist es zwar moglich, mit drei Emit- 
tervorrichtungen und zwei Detektorvorrichtimgen eine Positionsbestimmung durchzufiih- 
ren, jedoch ist es vorteilhaft, funf Emittervorrichtungen und vier Detektorvorrichtungen 
einzusetzen. Durch die Verwendung von mehr als drei Emittervorrichtungen kann neben 
der Position der Kamera auch die Hohe oder der Rollwinkel oder der Nickwinkel oder der 
Schwenkwinkel bestimmt werden, da die Zuordnung der einzelnen Emittervorrichtungen en 
zueinander Ruckschliisse hierauf zulaBt. Durch den Einsatz von mehr als zwei Detektorvor- 
richtungen kann das erfindungsgemaBe Kamera Tracking System die Position der einzelnen 
Emittervorrichtungen im Raum zuverlassiger bestimmen, da nunmehr redundante Daten 
voriiegen. 

Das heiBt, der angeschlossene Rechner ermittelt ausgehend von jeder Detektorvorrichtung 
eine Gerade durch die jeweiUge Emittervorrichtung. Der Schnittpimkt dieser Geraden Uegt 
genau in der Emittervorrichtimg. Da sich die Geraden aufgrund von MeB- imd/oder Rechen- 
fehlem nicht exakt in einem Punkt treffen, wird liber mathematische Methoden zur Fehler- 
minimierung ein theoretischer Schnittpunkt errechnet. Dieser theoretische Schnittpunkt ent- 
spricht um so praziser dem Ort der tatsachlichen Emittervorrichtung, je mehr Geraden zmt 
Verfugung stehen. 

Ein weiterer Vorteil dieses redundanten Systems besteht darin, daB dem Rechner auch dami 
geniigend hiformationen zur Bestimmung der Position und der Lage der Studiokamera zur 
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Verfugung stehen, werm die Emittervorrichtung fiir die eine oder die andere Detektorvor- 
richtung nicht erfafibar sind oder wenn die Emittervorrichtungen sich ungunstigerweise ge- 
genseitig abdecken. Anhand von Versuchen ist festgestellt worden, daB ein flinf Emittervor- 
richtungen und vier Detektorvorrichtungen aufweisendes Kamera Tracking System bereits 
eine sehr zuverlassige und sehr prazise Positions- und Lagebestimmung der Studiokamera 
gewahrleistet. In einer vorteilhaften Ausfuhrungsform des erfmdungsgemaBen Kamera 
Tracking Systems werden zehn oder gar zwolf Detektorvorrichtungen verwendet, so daB 
dieses Kamera Tracking System eine noch prazisere und noch zuverlassigere Bestimmung 
der Position und der Lage der Studiokamera erlaubt. 

Bei den erfmdungsgemaB zu verwendenden Emittervorrichtungen handelt es sich insbeson- 
dere um Lichtquellen, die zweckmaBigerweise Infrarotiicht abgeben. Die Detektorvorrich- 
tungen sind vorzugsweise als Erfassungskameras ausgebildet. Samthche zuvor genannten 
Varianten der Erfmdung sind gleichemiaBen auch auf den Fall anzuwenden, daB die Emit- 
tervorrichtungen als Lichtquellen und die Detektorvorrichtungen als Erfassimgskameras 
ausgebildet sind. Dies gilt auch fur die nachfolgenden Betrachtungen, bei denen der Ein- 
fachheit halber statt von Emittervorrichtungen von „LichtqueIlen„ und statt von Detektor- 
vorrichtungen von „Erfassungskameras„ die Rede ist. 

Die Anordnung der Erfassungskameras mindestens einen Meter oberhalb -der Lichtquellen 
hat den Vorteil, daB hierdurch ein gunstiger Blickwinkel geschaffen ist. In diesem Fall er- 
zeugt die Bewegung der Lichtquellen (d.h. der Studiokamera) eine in dem von den Erfas- 
sungskameras jeweils gelieferten Bildem gut sichtbare Verschiebung der Lichtquelle, so 
daB hierdurch die Auswertxmg durch den Rechner erleichtert und prazisiert werden kann. 

Die moglichst gleichmaBige Verteilung der Erfassungskameras im Studio hat den Vorteil, 
daB die Lichtquellen aus mehreren stark voneinander abweichenden Blickwinkeln erfaBt 
werden, so dafi hierdurch eine zuverlassige geometrische Auswertung erreicht wird. 

In einer bevorzugten Ausfuhrungsform des erfmdungsgemaBen Kamera Tracking Systems 
sind die Lichtquellen alle in einer Ebene an einem Halteelement angeordnet, das insbeson- 
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dere als Ring ausgebildet ist. Dies hat den Vorteil, dafi die Lichtquellen zwar platzsparend 
angeordnet sind, dennoch einen groCtmoglichen Abstand voneinander aufweisen, so daB 
cine gute Erfassung durch die Erfassungskameras moglich ist. 

In einer bevorzugten Weiterbildung ist zwischen der Lichtquelle und dem Ring ein 
Distanzelement vorgesehen, damit die von den Lichtquellen erzeugten Reflektionen auf 
dem Ring moglichst gering bleiben, so dafi die Lichtquelle flir die Erfassungskamera wie 
gewunscht punktfonnig erscheint. 

ZweckmaBig ist es iiberdies, wenn die Umgebung urn die Lichtquellen herum nicht reflek- 
tierend, vorzugsweise schwarz ist, urn die Lichtquellen kontraststark erkennen zu konnen. 

Die Anordnung der Lichtquellen auf einem in aquidistante Abschnitte unterteilten Ring, 
wobei ein Abschnitt oder Fixpunkt mehr als die Gesamtzahl der Lichtquellen vorhanden 
sind, hat den Vorteil, dafi auf dem Ring eine maricante, unsymmetrische Lucke entsteht, die 
zur eindeutigen Zuordnung der Lichtquellen eingesetzt wird. Hierdurch wird erreicht, dafi 
die Lichtquellen zwar moglichst alle den gleichen Abstand voneinander haben, um auf den 
von den Erfassungskameras erfafiten Bildem gut voneinander differenziert werden zu kon- 
nen, daB jedoch gleichzeitig dem Ring aus Lichtquellen eine eindeutige Richtung zugeord- 
net werden kann. Die eindeutige Richtung kann aber auch dadurch erreicht werden, daB die 
Lichtquellen in einem vorbestimmten unregehnaBigen Muster angeordnet sind. 

Der Einsatz von Infrarotlicht im erfindungsgemaBen Kamera Tracking System hat den 
Vorteil, daB die Erfassungskameras nicht versehenthch andere im Studio befindliche Licht- 
quellen erfassen und daB im Studio auftretendes Streulicht unbeachtlich bleiben kann. 



In einer anderen, bevorzugten Ausfiihrungsform ist die an der Lichtquelle anliegende Be- 
triebsspannung kleiner als die Sollspannung der Lichtquelle. Insbesondere wird bei Einsatz 
einer 1 2 Volt Halogen-Gluhbime eine Betriebsspannung von 4,5 Volt angelegt. Dies hat 
den Vorteil, daB die Lichtquelle uberwiegend im Infrarotbereich Licht ausstrahlt und somit 
die allgemeine Ausleuchtung des Studios nicht beeinfluBt. Ein weiterer Vorteil liegt darin. 
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dafl derartige mit einer niedrigeren Betriebsspannung versehene Lichtquellen eine hohere 
Lebensdauer und eine geringere Storanfalligkeit aufweisen. 

In einer weiteren bevorzugten Ausfuhrungsform ist die Erfassungskamera eine handels- 
iibliche CCD-TV Kamera fur schwarz-weifi Aufhahmen. Solche TV Kameras sind kosten- 
giinstig erhaltlich und enthalten gewohnlicherweise einen Infrarotlicht ausfiltemden Filter, 
da dieses Infrarotlicht fiir normale Anwendungen unerwiinscht ist. Beim erfindungsge- 
maBen Kamera Tracking System wird jedoch uberwiegend mit Infrarotlicht gearbeitet, so 
daB dieser in der CCD-TV Kamera eingebaute Infrarotfilter entfemt werden, damit die 
CCD-TV Kamera auch Infrarotlicht gut wahjnim-mt. 

In einer weiteren, vorteilhaflen Ausgestaltung ist die Erfassungskamera mit einem sicht- 
bares Licht ausfiltemden und nur infrarotes Licht durchlassenden Filter versehen, damit an- 
dere im Studio befmdliche Lichtquellen oder unerwunscht auftretende Reflektionen im 
sichtbaren Lichtbereich nicht von der Erfassungskamera wahrgenommen werden und zu 
einer fehlerhaften Erfassung der an der Kamera befmdlichen Infrarot-Lichtquellen fiihren. 

In der einer anderen, bevorzugten Ausfuhrungsform weist die Erfassungskamera eine auto- 
matische Blendenregelung auf Hierdurch kann der zur Erfassung der Lichtquellen erfor- 
derliche Lichteinfall selbstandig von der Erfassungskamera gesteuert werden. 

In. noch einer weiteren, bevorzugten Ausfuhrungsform des erfmdungsgemaUen Kamera 
Tracking Systems arbeitet die Erfassungskamera mit einer Bildfrequenz von 50 Hertz (in 
Europa) bzw. 60 Hertz (in Ubersee), damit die Erfassungskamera in idealer Weise mit der 
Studiokamera synchronisiert werden kann. Dies ist deshalb besonders vorteilhaft, weil hier- 
durch die Daten zur Positions- und/oder Lagebestimmung der Kamera quasi zeitgleich mit 
dem von der Studiokamera aufgenommenen Bild vorliegen, so daC eine optimale Anpas- 
sung des Studiobildes an das Computerbild/virtuelle Bild erfolgen kann. 

In einer vorteilhaften Weiterbildung werden in die Lichtquellen nicht mit Wechselspan- 
nung, sondem mit Gleichspannung betrieben. Hierdurch wird erreicht, daB die Lichtquellen 
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permanent Licht imitieren, so daB cine Synchronisation zwischen der Lichtquelle und der 
Erfassungskamera obsolet ist. Dies fiihrt zu erheblichen Kosteneinsparungen. 

In noch einer anderen, bevorzugten Weiterbildung ist die Lichtquelle von einer nicht durch- 
sichtigen aber zumindestens teilweise lichtdurchlassigen Kugel umgeben, deren Durchmes- 
ser zwischen 1 cm und 10 cm, vorzugsweise 5 cm betragt. Hierdurch wird das von der 
Lichtquelle imitierte Licht gleichmafiig auf die Kugeloberflache projiziert, so daB die er- 
leuchtete Kugeloberflache in einfacher Weise von dem CCD-Chip der Erfassungskamera 
erfaBt werden kann. Dieser gleichmaBige und gleichzeitig vergleichsweise groBe Lichtfleck 
unterscheidet sich deutlich von seinem zumindest im Infrarotbereich dunklen Hintergrund 
und verhindert so ein Verwackeln der von der Erfassungskamera aufgenommenen Bilder 
und bewirkt eine prazise Positionsbestimmung der jeweiligen Lichtquelle. Diese Kugel ist 
vorteilhafterweise aus Teflon gefrast, was sich als besonders giinstig erwiesen hat. 

Die derart von der Erfassungskamera aufgenommenen Bilder werden anschheBend von 
einer Datenverarbeitungsanlage (Rechner) weiterverarbeitet. Dies erfolgt zweckmaBiger- 
weise dergestalt, daB die Bilder zunachst binarisiert werden, bevor mittels einer an sich be- 
kannten Schwerpunktsberechnung der Schwerpunkt einer jeden Lichtquelle fur jedes Bild 
separat berechnet wird. Hierdurch wird erreicht, daB fiir jedes Bild einer jeden Erfassungs- 
kamera ein sehr praziser Lagepunkt der jeweiligen Lichtquelle definiert werden kann. Da 
dem Rechner die Position und die Orientierung (Lage) einer jeden, fest installierten Erfas- 
sungskamera bekannt ist, kann der Rechner fur jede Erfassimgskamera eine Gerade im 
Raum bestinmien, die durch den auf dem CCD-Chip befindlichen Bildpunkt der jeweiligen 
Lichtquelle und einen fest definierten Punkt in der Erfassungskamera bis hin zur 
Lichtquelle fuhrt. Durch Uberlagem mehrerer dieser Geraden (je nach Anzahl der aktiven 
Erfassungskameras) kann dann die Lage der Lichtquelle im Raum bestimmt werden, da 
sich die Lichtquelle im Schnittpunkt dieser Geraden befinden muB. Im nachsten Schnitt 
berechnet der Rechner dann aus den ihm nun bekannten Positionen der verschiedenen 
Lichtquellen die Position und die Lage der Kamera. 
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Wie oben kurz erwahnt, ist es von Vorteil, werm die Emittervorrichtungen als Lichtquellen 
in Form von Leuchtkorpem ausgebildet sind, die cine spharische Liehtflache aufweisen. Im 
einfachsten Fall konnen als Lichtquellen Gluhlampen eingesetzt werden. Diese Gluhlampen 
stehen nach oben von dem Halteelement ab und sind damit durch die Erfassungskameras 
zuverlassig erfaCbar. Versuche haben jedoch ergeben, daB der optische Abstand der Mittel- 
punkte zweier benachbarter Lichtquellen bei einem ungunstigen Winkel der Studiokamera 
zu einer oder mehreren Erfassungskameras sehr gering wird, so daB eine teilweise oder 
voltstandige optische Uberdeckung zweier Lichtquellen eintreten kann. In diesem Fall 
konnte eine Erfassungkamera zwei unterschiedliche Lichtquellen als eine einzige Licht- 
quelle wahmehmen, was zu falschen Ergebnissen fiihren kann. Eine optische Ubersciinei- 
dung zweier Lichtquellen kann bestmoglichst dadurch vermieden werden, daB die Licht- 
quellen Oder, allgemeiner ausgedriickt, die Emittervorrichtungen ebene Emissionsflachen 
aufweisen. Im Falle des Einsatzes von Lichtquellen zur Emission sichtbaren Lichts bzw. 
Infrarotlichts handelt es sich bei den Emissionfeldem um hinterleuchtete ebene Flachenbe- 
reiche, die nach Art von Scheiben, Flatten o.dgl. ausgebildet sind. Diese ebenen Flachen 
liegen zweckmaBigerweise in der Oberflache des Halteelements, das die Lampen der Licht- 
quellen aufiiimmt. 

Ein entsprechend dieser Weiterbildung der Erfindung ausgebildetes Kamera Tracking 
System hat den Vorteil, daB die ebenen Emissionsflachen, bei denen es sich insbesondere 
um illuminierte Lichtflachen handelt, je nach dem Einfallswinkel der Erfassungskamera 
groBer oder kleiner erscheinen, wobei die Lichtflachen in Extremsituationen, meistens bei 
einem ungunstigen Winkel zur Erfassxmgskamera, kleiner werden. Durch die gleichzeitige 
Verkleinerung der Lichtflachen und des optischen Abstandes tritt eine optische Uber- 
deckung, wenn iiberhaupt, erst bei extrem starken Neigungen ein, so daB die Erfassungs- 
kameras auch bei extremen Winkeln zwischen Studiokamera und Erfassungskamera noch 
verwertbare Daten liefem. 

In einer vorteilhaften Weiterbildung sind die Lichtflachen in einem bestimmten Winkel zu- 
einander angeordnet. Beispielsweise sind einige Lichtflachen horizontal und andere vertikal 
angeordnet. Allgemein ausgedriickt sind die Lichtflachen auf zwei insbesondere rechtwink- 
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lig zueinander verlaufenden Seiten des Halteelements angeordnet. Dies hat den Vorteil, daB 
eine noch bessere optische Trennung erreicht wird und daB eine groBere Anzahl von Licht- 
flachen an dem Halteelement (Ring, Rahmen etc.) angebraeht warden konnen. Hierdurch 
stehen der Erfassungskamera auch bei extremen Schwenk-, Roll- oder Nickwinkeln der 
(Studio) Kamera dennoch geniigend Lichtflachen zu einer exakten und schnellen Bestim- 
mung der Position und der Orientierung der Kamera zur Verfugung. 

In einer vorteilhaften Ausfuhrungsform befinden sich hinter den Lichtflachen in einer Ver- 
tiefung Oder Aussparung untergebrachte Lichtgeber (Lampen, LED, etc.). Dies hat den 
Vorteil, daB die Erfassungskamera nicht mehr die gesamten Lichtgeber wahmimmt, son- 
dem lediglich die durch die Offhung der Vertiefung oder Aussparung heraustretenden 
Lichtstrahlen, die eine illuminierte Lichtflache bilden. 

In einer weiteren, bevorzugten Ausfuhrungsform ist die Vertiefung oder Aussparung durch 
eine Abdeckung verschlossen. Diese schiitzt die eigentliche Lichtquelle vor Verschmutzung 
und/oder Beschadigung. Dabei ist es Vorteilhafl, die Abdeckung, zumindest jedoch ein in 
der Abdeckung vorgesehenes Fenster aus einem lichtdurchlassigen Glas, aus einem transpa- 
renten Kunststoff oder aus einem folienbeschichteten Glas zu bilden, damit das vom Licht- 
geber ausgesandte Licht hindurchtreten kaim. Die Abdeckung bildet dabei die Lichtflache. 

In einer besonders bevorzugten Ausfuhrungsform laBt die Abdeclamg bzw. das Fenster 
lediglich Licht mit einer Wellenlange von mehr als 800 nm durch, so daB nur das Infrarot- 
licht dxirch die Abdeckung hindurchgelassen wird. Hierdurch erhoht sich fUr die ebenfalls 
nur infrarotes Licht aufiiehmende Erfassxmgskamera der Kontrast des Lichtflecks gegen- 
uber der Umgebimg, insbesondere gegeniiber dem im Studio vorhandenem Streulicht oder 
gegeniiber Studioscheinwerfem. 

Wenn eine Abdeckung oder ein Fenster eingesetzt wird, welches nur Licht einer einzigen 
Wellenlange, beispielsweise Licht einer Wellenlange von 850 nm, oder Licht eines eng be- 
grenzten Wellenlangenbereiches, beispielsweise Licht mit einer Wellenlange zwischen 830 
nm und 870 nm durchlaBt, wird der zuvor beschriebene Effekt noch verstarkt. 
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Das diffuse Abstrahlen des Lichtes von der Abdeckung bzw. vom Fenster hat den Vorteil, 
dali das von den 50 Leuchtdioden ausgestrahlte Licht von den Erfassungskameras als ein 
einheitlicher Lichtfleck wahrgenommen wird, das heifit, daC die 50 Lichtflecken bzw. 
-punkte der 50 Leuchtdioden quasi zu einem groBen Lichtfleck bzw. zu einer 
„geschlossenen„ Lichtflache verschmelzen. 

Eine weitere Erhohung des Kontrastes wird dadurch erreicht, da6 die Abdeckung oder. das 
Fenster das durchgelassene Licht diffus abstrahlt. 

In einer bevorzugten Weiterbildung ist die Abdeckung im wesentlichen eben ausgefiihrt, 
was den Vorteil hat, daB die Lichtquelle als flachenhaftes Lichtfeld (ebene Lichtflache) er- 
schient. 

In einer anderen, bevorzugten Weiterbildung ist die Abdeckung oder das Fenster kreisrund 
ausgebildet. Dies hat den Vorteil, dafi die Erfassungskamera die Lichtquelle als runden, 
Oder je nach Einfallswinkel der Erfassungskamera als elliptischen, Lichtfleck erkennt. 
Hierdurch werden bei bestimmten Einfallswinkehi auftretende Verzerrungen der geometri- 
schen Form auf ein Minimum reduziert, so daB eine einfache und zuverlassige Schwer- 
punktsbestimmung moglich ist. 

In einer altemativen Ausfiihrungsform kann der in einer Aussparung des Rahmens ange- 
ordnete Lichtgeber mit zwei, vorzugsweise rechtwinklig zueinander angeordneten Ab- 
deckungen versehen sein, so daB ein und derselbe Lichtgeber Lichtstrahlen sowohl nach 
oben als auch zur Seite hin ausstrahlen kaim. Bei einer derartigen Anordnung identifiziert 
die Erfassungskamera jede der beiden Abdeckungen als ein separates Lichtfeld, so daB trotz 
Halbienmg der Lichtgeber fur die Erfassungskamera dieselbe Anzahl von Lichtfeldem zur 
Verfiigung steht. 

Hierdurch kann der Strombedarf und somit die GroBe des benotigten Akkus reduziert wer- 
den, was eine deutliche Gewichtserspamis zur Folge hat. Eine weitere Gewichtseinsparung 
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und eine Kostenreduzierung wird durch die geringere Anzahl der Lichtquellen erreicht. 

In einer weiteren, bevorzugten Ausfuhrungsform ist die Lichtquelle aus vorzugsweise 50 
Infrarot-Leuchtdioden gebildet, die im Inneren des Rahniens, in der Vertiefiing oder Aus- 
spanmg angeordnet sind. Die im Infrarotbereich arbeitenden Leuchtdioden benotigen sehr 
viel weniger Strom als herkommliche Gluhlampen und liefem dariiber hinaus im Infrarot- 
bereich eine groBere Lichtmenge. Letzteres erhoht den Kontrast zum umgebenden Licht er- 
heblich. AuBerdem kann der Strombedarf, und somit auch der benotigte Akku verkleinert 
werden, so daB das Gesamtgewicht des Kamera Tracking Systems rednziert werden kann. 

In einer anderen, bevorzugten Ausfuhrungsform sind mehrere, vorzugsweise alle Licht- 
quellen einzeln schaltbar. Hierdurch ist es in einfacher Weise moglich das Kamera Tracking 
System zu initialisieren. Durch nachfolgendes Einschalten jeweils eines Lichtgebers konnen 
die Erfassungskameras den jeweiligen Lichtfleck defmieren, so daB in der Folgezeit dem 
jeweils erkannten Lichtfleck die richtige Lage auf dem Rahmen zugeordnet werden kann. 
Zwar ware es zur Initialisierung des Kamera Tracking Systems ausreichend, wenn min- 
destens einen Lichtfleck derart initialisiert wird, jedoch erhoht sich die Genauigkeit des 
Systems, wenn mehrere, oder vorzugsweise alle, Lichtflecken einzebi initialisiert werden. 

In einer weiteren, bevorzugten Ausfuhrungsform ist an der Kamera ein Gyroskop ange- 
bracht, weiches den Schwenk-, Nick- und Rollwinkel der Kamera bestimmt. Dieses 
Gyroskop wird zusatzlich zu den Erfassungskameras eingesetzt, so daB hierdurch eine 
redundante Orientierungsbestimmung der Kamera erfolgt. Diese redundant vorliegenden 
MeBwerte werden dann von der Software zur Berechnung der Orientiemng der Kamera 
herangezogen. 

In einer bevorzugten Weiterbildung werden die vom Gyroskop erhaltenen MeBwerte durch 
einen linearen Optimalfilter (Kaiman-Bucy-Filter) optimiert, insbesondere geglattet. Hier- 
durch ist eine prazisere Bestimmung der wirklichen Orientiemng der Kamera moglich. 
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In einer anderen altemativen Ausfuhrungsfomi ist das Lichtfeld als Reflektor ausgebildet. 
Das heiBt am Rahmen sind analog zu den oben bescliriebenen Abdeckungen vorzugsweise 
flachenhaft und eben ausgebildete Reflektoren (oder Spiegel) angebracht, die gegebenen- 
falls auch winklig zueinander angeordnet sein konnen. Das im Studio vorhandene sichtbare 
Oder infrarote Licht wird an diesen Reflektoren reflektiert, so daB es von den Erfassungs- 
kameras wahrgenommen werden kann. Somit haben derartige Reflektoren fur die Erfas- 
sungskameras dieselbe Funktion und dieselbe Wirkung wie eine Lichtflache oder eine 
Lichtquelle. 

Der Vorteil dieser Refl.ektoren (insbesondere Spiegel) besteht darin, daB hierdureh keinerlei 
Dioden oder andere Gluhlampen und keinerlei Stromversorgung, also auch keine schweren 
Akkus, bendtigt werden, was eine erhebliche Gewichts- und Kostenreduzierung bewirkt. 

In einer anderen, bevorzugten Ausfuhningsform werden die Lichtgeber pulsierend betrie- 
ben, das heiBt die Lichtgeber werden in regehnaBigen Abstanden fur einen nur sehr kurzen 
Zeitraum eingeschaltet. Dabei hat es sich als vorteilhaft erwiesen, analog hierzu die Erfas- 
sungskameras ebenfalls pulsierend und synchron zu betreiben, um Fehhnessungen zu ver- 
hindem. Mit Hilfe des angeschlossenen Computers konnen die Lichtgeber und die Erfas- 
sungskameras in einfacher Weise synchronisiert werden. 

Durch die nur kurzzeitige Einschaltung der Lichtgeber, insbesondere der Leuchtdioden, 
konnen dies kurzzeitig mit einer hoheren Spannung betrieben werden, so daB die Leucht- 
dioden etwa drei Mai so viel Licht abstrahlen, wie bei Nennspannung. Diese verbesserte 
Intensitat der Lichtquelle bzw. des Lichtfeldes fiihrt zu einem besseren Kontrast, so daB die 
Erfassungskameras die Lichtfelder und insbesondere deren Rander sehr viel besser wahr- 
nehmen kann. 

Es hat sich als vorteilhaft herausgestellt, die Lichtquellen mit einer Frequenz von 50 Hertz 
und einer Leuchtdauer 1/5000 Sekunden zu betreiben. Altemativ hierzu sind auch andere 
Frequenzen von 1 0 bis zu 200 Hertz beziehungsweise Leuchtdauem von 1/50 Sek, bis zu 
1/100.000 Sek. moglich. Insbesondere in Landem, in denen die allgemeine Stromfrequenz 
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60 Hertz betragt, ware eine Taktung der Lichtquellen mit einer Frequenz von 60 Hertz vor- 
teilhaft. 

In einer bevorzugten Ausfuhrungsform ist die Verschlufizeit der Erfassungskamera ktirzer 
als das zwischen zwei Pulsen liegende Zeitintervall. Dies hat den Vorteil, dalJ innerhalb 
dieser kurzen VerschiuBzeit weniger Fremdlicht auf den Photosensor der Erfassungskamera 
gelangt, was einen erhohten Kontrast der Lichtfelder gegenuber der Umgebung zur Folge 
hat. 

In einer bevorzugten Weiterbildung ist die Verschlufizeit der Erfassungskamera im wesent- 
lichen gleich der Leuchtdauer der Leuchtdioden. Hierdurch wird erreicht, dafi die Blende 
der Erfassungskamera gerade lange genug geoffiiet ist, urn das von den Leuchtdioden aus- 
gestrahlte Licht aufzunehmen xmd daB die Blende nicht langer als notig geoffeet ist, so dafi 
moglichst wenig Fremdlicht aufgenommen wird. Dies fflhrt zu einem noch besseren Kon- 
trast zwischen den Lichtfeldem und der Umgebung. 

Ein weiterer Vorteil besteht darin, daB die (Studio) Kamera durch das erfmdungsgemaBe 
Kamera Tracking System unabhangig von Schienen eingesetzt werden kann. Beispielsweise 
kann die Kamera auch auf der Schulter getragen werden oder fur Aufienaufiiahmen (im 
Freien) eingesetzt werden. 

Das erfmdungsgemaBe Kamera Tracking System ist, um in einem virtuellen Studio einge- 
setzt werden zu konnen, zuvor zu kalibrieren. Zu diesem Zweck kann man den von den Er- 
fassungskameras erfaBten Hintergrund hinter der Studiokamera mit einem Raster versehen. 
Dies geschieht zweckmaBigerweise durch Auslegen eines „Teppichs„ im Studio, der die 
Rasterung aufweist. Die Ausrichtung und Lage des „Teppichs„ innerhalb des Studios soUte 
dabei bekannt sein. 

Vorteilhaft ist es, das erfindungsgemaBe Kamera Tracking System mit Hilfe einer elektro- 
magnetische Strahlung emittierenden Kalibrierungsvorrichtung zu kalibrieren, bei der es 
sich wiederum vorzugsweise um eine Lichtquelle handelt. Diese Kalibrierungsvorrichtung 
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wird durch das Studio bewegt und dabei von den Detektorvorrichtungen erfaBt. Auf diese 
Weise wird die geometrische Beziehung der Detektorvorrichtungen untereinander errech- 
net. In einem zw^eiten Schritt steht dann die Kalibrierungsvorrichtung fest und wird von 
samtlichen Detektorvorrichtungen erfaBt. Hierdurch erfolgt der Abgleich des Studiokoordi- 
natensystems auf die geometrische Beziehung der Detektorvorrichtungen. In einem letzteri 
Schritt wird dann die Kalibrierungsvorrichtung von der Studiokamera erfaBt, um den 
Knotenpunkt (sogenannter nodal point) der Studiokamera relativ zu den mit der Studio- 
kamera gekoppelten Emittervorrichtungen festzulegen. Aufgrund der zuvor ermittelten 
geometrischen Beziehung der Detektorvorrichtungen zur Kalibrierungsvorrichtung einer- 
seits und der geometrischen Beziehung der Studiokamera zur Kalibrierungsvorrichtung ist 
es nun moglich, die geometrische Beziehung zwischen den mit der Studiokamera gekop- 
pelten Emittervorrichtungen und dem Knotenpunkt der Kamera zu ermittehi. Damit ist das 
gesamte System kalibriert. 

Weitere vorteilhafte Ausgestaltungen der Erfindung sind in den Unteranspriichen angege- 
ben. Soweit im Vorstehenden und Nachfolgende auf diese Weiterbildungen nicht eingegan- 
gen wird, wird insoweit auf die entsprechenden Unteranspriiche verwiesen. 

Weitere Vorteile des erfindungsgemaBen Kamera Tracking Systems ergeben sich aus der 
beigefiigten Zeichnung und den nachfolgend beschriebenen Ausfuhrungsbeispielen, anhand 
derer die Erfindung mit als (Infrarot-)Lichtquellen und CCD-Erfassungskameras verdeut- 
licht wird. Die vorstehend genannten und noch weiter ausgefuhrten Merkmale konnen er- 
fmdungsgemaB jeweils einzehi oder in beliebigen Kombinationen miteinander verwendet 
werden. Die erwahnten Ausfuhrungsbeispiele sind nicht als abschlieBende Aufzahlung zu 
verstehen, sondem haben vielmehr exemplarischen Charakter. Es zeigen: 

Fig. 1 eine Ansicht eines virtuellen Studios mit einem erfindungsgemaBen Kamera 
Tracking System gemaB einem ersten Ausfuhrungsbeispiel, 

Fig. 2 eine Studiokamera mit daran angebrachten, ringformig angeordneten Lichtquel- 
len gemaB dem ersten Ausfuhrungsbeispiel, 
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Fig. 3 ein FluBdiagramm zur Verdeutlichung der Verfahrensweise zur Verfolgung der 
Studiokamera, 

Fig. 4 eine perspektivische Seitenansicht einer Studiokamera mit daran angebrachtem 
ringfbrmigen Rahmen gemafi einem zweiten Ausfuhrungsbei spiel. 

Fig. 5 der ringformige Rahmen der Studiokamera gemafi Fig. 4, 

Fig. 6 eine Schnittansicht des Rahmans gemaB Fig. 5, geschnitten entlang Linie VI- VI, 
und 

Fig. 7 eine Schnittansicht des Rahmens gemaB Fig. 5, geschnitten entlang Linie VII- 
VIL 

Fig. 1 zeigt ein Blauraumstudio 10 mit einer (Studio-) Kamera 12 und vier an der Decke 
aufgehangten Erfassungskameras 14. Die Erfassungskameras 14 sind moglichst hoch und 
moglichst weit vom Mittelpunkt des Blauraumstudios entfemt aufgehangt und derart im 
Blauraumstudio verteilt, daB sie das Studio aus verschiedenen Blickwinkeln heraus erfas- 
sen. 

Bei der hier benutzten Erfassungskamera 14 handelt es sich um eine handelsubliche 
CCD-TV Kamera fur schwarz-weiB Auj5iahmen, die zur Aufiiahme von infrarotem Licht 
umgebaut wurde. Das heiBt der in handelsublichen CCD-TV Kameras befindliche, das 
Infrarotlicht ausfiltemde Filter wurde entfemt und durch einen das sichtbare Licht ausfil- 
temden und nur das Infrarotlicht durchlassenden Filter ersetzt. Durch diese UmbaumaB- 
nahme ist eine kostengiinstige Erfassungskamera entstanden, die im Infrarotbereich ausge- 
sendetes Licht besonders gut erkennt kaim. Die vom CCD Chip erkannten Lichtpuxikte 
werden dann an einem hier nicht dargestellten Rechner zur Auswertung weitergeleitet. 
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An der (Studio) Kamera 12 ist im Abstand von etwa 50 cm nach oben ein Ring 16 montiert, 
an dem uber Distanzelemente 18 fiinf Lichtquellen 20 gehalten sind. Die Lichtquellen 20 
sind fest mit der Kamera 12 verbunden und machen folglich alle Bewegungen der Kamera 
12 ebenso mit. Die Kamera 12 ist auf einem hohenverstellbaren Dreibein (Stativ) 22 mon- 
tiert, dessen Beine Rollen aufweisen, so daU die gesamte Kamera 12 beliebig durch das 
Blauraumstudio 10 bewegt werden kann. 

Der Ring 16 ist in sechs gleich groBe Abschnitte unterteilt, so daB auf dem Ring 16 sechs 
aquidistante Fixpunkte entstehen. Jede der fiinf Lichtquellen 20 ist auf einem dieser sechs 
Fixpunkte angebracht, so daB zwangslaufig ein Fixnunkt 24 unbesetzt bleibt. Hierdureh ist 
es ftir die Erfassungskameras 14 zweifelsfrei moglich, die Orientierung der Kamera 12 zu 
bestimmen, da die Anordnung der Lichtquellen 20 aufgrund des unbesetzten Fixpunktes 24 
unsymmetrisch ist. 

Die Lichtquelle 20 wird von einer handelsublichen 1 2 Volt Halogen-Gliihlampe gebildet, 
die von einem kugelformigen Gehause aus Teflon umgeben ist. Die Halogen-Gluhlampen 
werden mit einer Gleichspannung von 4,5 Volt betrieben, so daB diese dementsprechend 
nur schwach glimmen. Die hierdureh erzielte, schwache Lichtimmission findet tiberwie- 
gend im Infrarotbereich statt und kann von daher sehr gut von den ebenfalls im Infrarotbe- 
reich arbeitenden Erfassungskameras 14 wahrgenommen werden. Die aus Teflon gebildeten 
Gehause sind so diinnwandig ausgebildet, daB man durch sie zwar nicht hindurchsehen 
kann, daB sie aber dennoch lichtdurchlassig sind. Hierdureh wird eine vergleichsweise 
groBe Lichtquelle 20 erzielt, deren Oberflache annahemd gleichmaBig ausgeleuchtet ist, so 
daB die Erfassungskamera 1 4 einen deutlichen und gegeniiber dem Hintergrund scharf um- 
rissenen Lichtpunkt wahmehmen kann. 

Die (Studio) Kameras 12 arbeiten in Deutschland ublichenveise mit einer Bildfrequenz von 
50 Hertz und in Amerika mit einer Bildfrequenz von 60 Hertz. Damit der die von der Erfas- 
sungskamera 14 gelieferten Bilder auswertende Rechner die momentane Position der 
Kamera 12 in korrekter Weise dem virtuell erzeugten Bildhintergrund zuordnen kann, soUte 
die Erfassungskamera 14 mit der (Studio-) Kamera 12 synchronisiert sein, damit zu jedem 
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von der Kamera 12 aufgenommenen Bild die exakte Momentanposition bestimmt werden 
kann. Folglich arbeitet die Erfassungskamera 14 ebenfalls mit 50 bzw. 60 Hertz. 

Die Arbeitsweise des erfindungsgemaBen Kamera Tracking Systems vorzugsweise im 
Infrarotbereich hat den Vorteil, daC hierdurch Streulicht und andere Lichtquellen, die zur 
Ausleuchtung der Akteure bzw. der Buhne erforderlich sind, von der Erfassungskamera 14 
nicht Oder nur schlecht erkannt werden. Das von den Lichtquellen 20 imitierte Infrarotlicht 
wird von der Erfassungskamera 14 jedoch sehr gut erkannt, wahrend das Licht im sicht- 
baren Bereich ausgefiltert wird. Durch eine derartige Trennung der verschiedenen 
Lichtspektren kann das Kamera Tracking System die Position und Lage der Kamera 1 2 zu- 
verlassig feststellen. 

Die Auswertung der von den Erfassungskameras 14 aufgenonmienen Bilder erfolgt nach 
folgendem Verfahren: 

Vorteilhafterweise werden die Erfassungskameras 14 fest an der Studiodecke montiert, wo- 
bei die Position und die Ausrichtung einer jeden Erfassimgskamera durch Kalibrieren genau 
festgelegt wird. Wahrend des Betriebs des erfindungsgemaBen Kamera Tracking Systems 
werden von den Erfassimgskameras 14 exakt zeitgleich, d.h. mit gleicher Frequenz und 
synchronisiert, zu der (Studio) Kamera 12 vier Aufiiahmen der Lichtquellen 20 gemacht 
und an einen Rechner weitergeleitet. Dabei bilden die vergleichsweise groBen Lichtquellen 
20 einen entsprechend groBen Lichtfleck auf dem CCD-Chip der Erfassungskamera 1 4. 
Die einzekien FestkorperMatrixen der CCD-Chips liefem dann ein entsprechendes Signal 
an den Rechner, wenn diese Festkorper-Matrix uber einen gewissen Grenzwert hinaus 
Infrarotlicht empfangt. 

Der Rechner wertet die empfangenen Lichtsignale derart aus, daB er nur die Signale als eine 
echte Lichtquelle wahmimmt, bei der eine entsprechende Vielzahl von benachbarten Fest- 
korper-Matrixen ein Signal sendet (binarisieren). AnschlieBend wird uber eine allgemein 
ubliche Schwerpunktbestimmung auch der Schwerpunkt einer jeden Lichtquellen im Bild 
durchgefiihrt. Hierzu ist eine relativ groBe Ausgestaltung der einzelnen Lichtquellen 20 
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vorteilhaft, da hierdurch relativ scharf umrissene und gleichzeitig relativ grofle Lichtpunkte 
aufgenommen werden. Auch ist hierdurch die Verwechslungsgefahr mit anderen Licht- 
quellen minimiert, da derartig groBe infrarot imitierende Lichtquellen im Blauraumstudio 
10 selten vorkommen. 

Nachdem auf jedem einzelnen Bild einer jeden Erfassungskamera 14 die einzelnen Licht- 
quellen mittels ihrer Schwerpunkte definiert sind, wird eine durch den Schwerpunkt der 
Lichtquelle auf dem CCD-Chip und einem defmierten Punkt innerhalb der Erfassungs- 
kamera 14 hindurchlaufende Gerade bestimmt. Somit hat der Rechner fur jede Lichtquelle 
20 vier Geraden im Raum zur Verfugung, die sich in einem bestimmten Punkt schneiden. 
Dieser Schnittpunkt ist der tatsachliche Ort der Lichtquelle 20 im Blauraumstudio 10. Da 
die verschiedenen Erfassungskameras 14 das Blauraumstudio 10 von alien Seiten, also 
dreidimensional erfassen, kann hiermit die Position einer jeden Lichtquelle 20 im Raum be- 
stimmt werden. 

Nachdem alle funf Lichtquellen 20 im Raxun bestinmit sind, lafit sich die Position Lind die 
Orientierung (Lage) der (Studio-) Kamera 12 bestimmen, da diese in einem bekannten Ver- 
haltnis zu den Lichtquellen 20 steht. 

Bei einem derartigen Messen und Auswerten der Lichtpunkte kdnnen naturgemaB MeB- 
und/oder Rechenungenauigkeiten auftreten, so daB es in der Praxis vorkommt, daB sich die 
vier vom Rechner bestimmten Geraden nicht wirklich in einem Punkt treffen. Deshalb fuhrt 
der Rechner noch allgemein bekannte, analytische Fehlerabschatzungen durch, um aus den 
festgelegten vier Geraden einen moglichst genau der tatsachlichen Lage der Lichtquelle 
entsprechenden Punkt im Raum zu definieren. 

In einer nicht dargestellten Ausfuhrungsform weist das erfindungsgemaBe Kamera Tracking 
System zehn oder mehr Erfassungskameras auf. Dies hat unter anderem den Vorteil, daB 
hierdurch zehn Geraden jm Raum bestimmt werden, die sich theoretisch in einem Punkt 
treffen sollten. Durch diese zusatzlichen, redundanten Geraden laBt sich die Genauigkeit der 
rechnerisch bestimmten Lichtquelle im Vergleich zur tatsachlichen Lichtquelle weiter er- 
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hohen, da durch das zusatzliche Datenmaterial auftretende MeB- und/oder Rechenfehler 
besser herausgerechnet werden konnen. Bin weiterer Vorteil besteht darin, daB durch die 
redundanten Erfassungskameras eine zuverlassigere Erfassung der einzelnen Lichtpunkte 
erfolgen kann, das heiCt, daB ein unbeabsichtigtes Abdecken einzelner Lichtpunkte keine 
groBen Folgen auf die Auswertung hat. 

In den Fign. 4 bis 7 sind die auf einem Ring (Rahmen) angeordneten Lichtquellen eines 
altemativen Kamera Tracking Systems dargestellt. Soweit die Bestandteile dieses altemati- 
ven Systems denen des Kamera Tracking Systems gemaB Fign. 1 bis 3 entsprechen oder 
gleichen, sind sie mit den gleichen Besoigszeichen yersehen. Fig. 4 zeigt eine auf einem 
Dreibein 22 positionierte (Studio) Kamera 12, auf der iiber ein Halteelement 30 ein ring- 
formiger Rahmen 32 angebracht ist. Dieser im Querschnitt viereckige, ansonsten ringfor- 
mig ausgebildete Rahmen 32 verfugt iiber einige auf seinem Umfang verteilte, vertikal an- 
geordnete Lichtfelder bzw. -flachen 20 und uber einige von den Lichtfeldem 20 unabhan- 
gige, auf der Stimseite des Ralimens 32 verteilte, horizontal angeordnete LichtfeWer bzw. - 
flachen 21. In der hier dargestellten Ausfuhrungsform sind die stimseitig angebrachten 
Lichtfelder 21 gegenuber den umfangsseitig angebrachten Lichtfeldem 20 jeweils versetzt 
angeordnet, wobei der Abstand zwischen den Lichtfeldem 20, 21 etwa dem Durchmesser 
der Lichtfelder 20, 21 entspricht. 

In einer anderen, hier nicht dargestellten Ausfuhrungsform, sind die stimseitig angebrach- 
ten Lichtfelder 21 und die umfangsseitig angebrachten Lichtfelder 20 miteinander fluchtend 
angebracht, so daB beide vom selben Lichtgeber aus gespeist werden konnen. 

Wie insbesondere den Fign. 6 tmd 7 zu entnehmen ist, verfugt der Rahmen 32 iiber eine 
Anzahl von Ausspamngen 34, in denen der jeweilige Lichtgeber untergebracht ist, wobei 
sich der Lichtgeber aus einer Anzahl von zirka 50 Infrarot-Leuchtdioden 36 zusammen- 
setzt, die am Boden der Ausspamng 34 angeordnet sind. Dabei sind die Leuchtdioden 36 
so ausgerichtet, daB ihre Hauptstrahlrichtung zur Offiumg 38 der Aussparung 34 zeigt. 
Diese Offhung 38 wird durch eine kreisrunde Abdeckung 40 aus einem foHenbeschichtetem 
Glas verschlossen, so daB die Leuchtdioden 36 gegen Beschadigung und Verschmutzung 
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geschxitzt sind. Die Leuchtdioden 36 strahlen infrarotes Licht mit einer Wellenlange von 
850 nm aus. 

Die aus folienbeschichtetem Glas gebildete Abdeckung 40 laBt nur Licht mit einer Lan- 
genwelle von mehr als 800 nm durch, wobei das Licht diffiis abgestrahlt wird, so dafi das 
punktfbmiig von den Leuchtdioden 36 abgestrahUe Licht von den Erfassungskameras als 
ein einheitlicher Lichtfleck wahrgenommen wird. Hierdurch ist gewahrleistet, daB lediglich 
das fur das menschliche Auge unsichtbare Infrarotlicht heraustreten kann, weiches dann 
von den hier nicht dargestellten Erfassungskameras erkannt wird. 

Die Leuchtdioden werden pulsierend mit einer Frequenz von 50 Hz betrieben, wobei die 
Blende der VerschluBkamera hierzu synchron betrieben wird. Gesteuert werden beide iiber 
die angeschlossenen Rechner. Es hat sich herausgestellt, da6 der Kontrast am grofiten ist, 
wenn die VerschluBzeit der Blende gleich der Leuchtdauer der Leuchtdioden ist, wobei es 
vorteilhaft ist, die Blende erst zu offiien, nachdem die Leuchtdioden mit ganzer Leistung 
leuchten. Bei dem Einsatz von 50 Leuchtdioden hat sich eine Leuchtdauer und somit Ver- 
schluBzeit von 1/5000 Sekunde als ausreichend herausgestellt. 

In einer altemativen, hier nicht dargestellten, Ausfuhrungsform weist eine Aussparung zwei 
Offiiimgen auf, wobei eine liber die Stimseite des Rahmens nach oben zeigt, wahrend die 
andere uber die Umfangsseite des Rahmens zur Seite zeigt. Beide Offhungen sind hier 
ebenso mit einer Abdeckung verschlossen, die nur infrarotes Licht durchlafit. In dieser Aus- 
fiihrungsform sind die Leuchtdioden derart angeordnet, daB das von ihnen ausgestrahlte 
infrarote Licht durch beide Offiiungen aus dem Rahmen heraustreten kann. Somit konnen 
zwei fiir die Erfassungskamera verschieden erscheinende Lichtfelder durch denselben 
Lichtgeber erzeugt werden, was zu erheblichen Einsparungen in der Energieversorgung und 
zu erheblichen Gewichts- und Kostenreduzierungen fiihrt. 

In noch einer anderen, hier nicht dargestellten, altemativen Ausfuhrungsform sind auf dem 
Rahmen statt der infrarotlichtdurchlassigen Abdeckungen Reflektoren (auch Spiegel) ange- 
ordnet. Hierdurch wird das im Studio vorhandene sichtbare oder infrarote Licht reflektierl. 
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SO daB die Reflektoren flir die an der Decke angebrachten Erfassungskameras als helle 
Lichtflecken erkennbar sind. Somit konnen die Erfassungskameras diese Reflektoren ge- 
nauso als Lichtfelder (Lichtquellen) erkennen und die Position und die Orientierung der 
(Studio) Kamera bestimmen. 

Um mit Hilfe des erfindungsgemafien Kamera Tracking Systems gemaC den zuvor be- 
schriebenen Ausfuhrungsbeispielen die Position und Lage bzw. Ausrichtung einer Studio- 
kamera ermitteln zu konnen, wird wie folgt verfahren, nachdem das System kalibriert wor- 
den ist (siehe dazu die in dem Abschnitt vor dem Beginn der Beschreibung der Ausfuh- 
rungsbeispiele dargelegte Verfahrensweise bzw. Anspruch 11). Zunachst werden die mit 
der Studiokamera 12 direkt oder, tiber deren Stativ 22 indirekt, angebrachten Lichtquellen 
20 durch die Erfassungskameras 14 aufgenommen. Die so entstehenden Bilder werden bi- 
narisiert, um anschlieBend fiir jedes Bild den Schwerpunkt einer jeden Lichtquelle 20 sepa- 
rat zu berechnen. Im AnschluB daran werden die berechneten Schwerpunkte als die 
momentane Position der jeweiligen Lichtquelle im jeweiligen Bild definiert. Unter Einbe- 
ziehimg der definierten Positionen in den Bildem der involvierten Erfassimgskameras 14 
wird dann die Position jeder einzelnen Lichtquelle 20 im Raum bestimmt. Anhand dieser 
Bestimmung wiederum erfolgt die Berechnimg der momentanen Position und/oder der 
momentanen Lage bzw. Ausrichtung der Studiokamera 12 anhand der raumlichen Position 
der einzelnen Lichtquellen 20. Ist die momentane Position und Ausrichtung bzw. Lage der 
Studiokamera 12 errechnet, kann mit dem Grafikrechner, der den virtuellen Hintergnind im 
Blaustudio 10 erzeugt, die der Kameraposition und -lage entsprechende Hintergrunddar- 
stellung generiert und diese auf den Hintergnind projiziert werden. 
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ANSPRUCHE 

Kamera Tracking System flir ein virtuelles Femseh- oder Videostudio zur Bestim- 
•mung der Position und/oder Ausrichtung einer Aufhahmekamera mit 

- mindestens drei Emittervorrichtungen zur Abgabe von elektromagnetischer Strah- 
lung, wobei die Emittervorrichtungen mechanisch mit der Aufhahmekamera kop- 
pelbar sind, 

- mindestens zwei Detektorvorrichtungen zur Erfassung der Lage der Emittervor- 
richtungen anhand der von den Emittervorrichtungen abgegebenen elektromagneti- 
schen Strahlung, wobei mit jeder Detektorvorrichtung m.ehrere Emitter/orrichtun- 
gen erfaiJbar sind, und 

- einer Recheneinheit zur Auswertung der von den Detektorvorrichtungen erfaBten 
und von den Emittervorrichtungen abgegebenen elektromagnetischen Strahlung 
und zur Ermittlung der Position und/oder Ausrichtung der mindestens drei Emit- 
tervorrichtungen relativ zu den mindestens zwei Detektorvorrichtungen. 

Kamera Tracking System nach Anspruch 1, dadurch gekennzeichnet, daB die Emitter- 
vorrichtungen aktiv arbeitende Sendevorrichtungen zum Aussenden der elektro- 
magnetischen Strahlung in Richtung auf die Detektorvorrichtungen oder passiv 
arbeitende Reflektionsvorrichtungen zum Reflektieren von elektromagnetischer 
Strahlung in Richtung auf die Detektorvorrichtungen sind. 

Kamera Tracking System nach Anspruch 1 oder 2, dadurch gekennzeichnet, daB die 
Emittervorrichtimgen an einem mit der Aufiiahmekamera koppelbaren Halteelement 
angeordnet sind. 

Kamera Tracking System nach Anspruch 3, dadurch gekennzeichnet, daB die Emitter- 
vorrichtungen derart an dem Halteelement angeordnet sind, daB sie die elektro- 
magnetische Strahlung von einer gemeinsamen Seitenflache oder von zwei winklig, 
insbesondere im wesentlichen rechtwinklig zueinander verlaufenden Seitenflachen 
abstrahlen. 
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5. Kamera Tracking System nach Anspruch 3 oder 4, dadurch gekennzeichnet, dal3 das 
Halteelement ein Ring ist, der eine obere Stimflache und eine seitliche umlaufende 
Umfangsflache aufweist, die an die Stimflache angrenzt. 

6. Kamera Tracking System nach Anspruch 5, dadurch gekennzeichnet, dafi die Emitter- 
vorrichtungen an der Stimflache des Rings angeordnet sind. 

7. Kamera Tracking System nach Anspmch 5 oder 6, dadurch gekennzeichnet, daB die 
Emittervorrichtimgen auch an der Umfangsflache angeordnet sind. 

8. Kamera Tracking System nach einem der Anspniche 1 bis 7, dadurch gekennzeichnet, 
daB die Emittervorrichtungen jeweils eine spharische Emitterflache aufweisen, aus 
der die elektromagnetische Strahlung austritt und/oder von der sie reflektiert wird. 

9. Kamera Tracking System nach Anspmch 8, dadurch gekennzeichnet, daB die Emitter- 
vorrichtungen jeweils eine ebene Emitterflache aufweisen, aus der die elektromagne- 
tische Strahlung austritt xmd/oder von der sie reflektiert wird. 

10. Kamera Tracking System nach Ansprach 9 und 4, dadurch gekennzeichnet, daB die 
Emitterflachen in einer gemeinsamen Seitenflache oder in den beiden winkhg zuein- 
ander verlaufenden Seitenflachen des Halteelements Hegen. 

11. Kamera Tracking System nach einem der Anspniche 1 bis 10, dadurch gekennzeich- 
net, 

- daB eine elektromagnetische Strahlung aussendende, insbesondere als vorzugs- 
weise im Infrarotbereich sendende Lichtquelle ausgebildete Kahbrierungsvorrich- 
tung vorgesehen ist, die von den Detektorvorrichtungen und der Studiokamera er- 
faBbar ist, und 

- daB die Recheneinheit 

anhand der von den Detektorvorrichtungen bei Bewegung der Kahbriemngs- 
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vorrichtung gelieferten Signale die geometrische Beziehung der Detektorvor- 
richtungen relativ zueinander und anhand der von den Detektorvorrichtungen 
bei stillstehener Kalibrierungsvorrichtung gelieferten Signale die geometrische 
Beziehung der Detektorvorrichtungen relativ zum Studio ermittelt und 
anhand der von der Studiokamera bei Erfassung der Kalibrierungsvorrichtung 
geUeferten Signale die Relativlage des Knotenpunkts (nodal point) der Studio- 
kamera zur Anordnung der mit der Studiokamera gekoppelten Emittervor- 
richtungen ermittelt. 

12. Kam.era Tracking System nach einem der Anspniche 1 bis 11, dadurch gekennzeich- 
net, daJ3 die Emittervorrichtungen insbesondere im Infrarotlichtbereich abstrahlende 
Lichtquellen aufweisen und daC die Detektorvorrichtungen als Erfassungskameras fur 
das Licht dieser Lichtquellen ausgebildet sind. 

13. Kamera Tracking System nach Anspruch 12, dadurch gekennzeichnet, dafi die Licht- 
quellen der Emittervorrichtungen in Vertiefungen des Halteelements angeordnet sind 
und dafi die Vertiefungen jeweils durch eine Abdeckung abgedeckt sind, die die Emit- 
terflachen bilden. 

14. Kamera Tracking System nach Anspruch 13, dadurch gekennzeichnet, dafi die Ab- 
deckungen das Licht der Lichtquellen diffus abstrahlen. 

15. Kamera Tracking System nach einem der Anspniche 12 bis 14, dadurch gekennzeich- 
net, dafi die Lichtquellen Leuchtdioden sind, wobei jeder Emittervorrichtung eine 
Vielzahl von Leuchtdioden zugeordnet sind, die einzeln, gruppenweise oder gemein- 
sam schaltbar sind. 

16. Kamera Tracking System nach Anspruch 2 und 8 oder 9, dadurch gekennzeichnet, 
dafi die Emitterflachen der Emittervorrichtungen als Reflektoren fur elektromagneti- 
sche Strahlung ausgebildet sind. 
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17. Kamera Tracking System nach einem der Anspriiche 1 bis 16, dadurch gekennzeich- 
net, dafi mit den Emittervorrichtungen ein MeBwerte liefemdes Gyroskop koppelbar 
ist, das mit der Recheneinheit verbunden ist, und daB die Recheneinheit die Mefiwerte 
des Gyroskop zur Korrektur der mit Hilfe der Detektorvorrichtungen ermittelten Aus- 
richtung der Emittervorrichtungen verarbeitet. 

18. Kamera Tracking System nach einem der Anspriiche 1 bis 17, dadurch gekennzeich- 
net, daB die Emittervorrichtungen ungleichmaBig verteiU angeordnet sind. 
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FIG. 2 
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Filmen der Lichtquellen und 
binarisieren der Bilder 



Berechnen des Schwerpunktes einer 
jeden Lichtquelie , fur jedes Bild separat 



Definieren des berechneten Schwerpunktes 
a!s die momentane Position der 
Lichtquelie im Bild 



Bestimmen der Position der 
Lichtquelie im Raum 



Berechnen der Position und der 
Orientierung der Kamera 



FIG. 3 
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FIG- 5 



wo 99/43150 



- 5/5 - 



PCT/EP99/01062 




FIG. 7 
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Erfindung zugrundeliegenden Phnzips Oder der ihr zugrundeliegenden 
Theorie angegeben ist 

"X" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann allein aufgrund dieser Verofferrtltehung nicht als neu Oder auf 
ertinderischer Tattgkeit beruhend betrachtet warden 

"Y* Veroffentlichung von besonderer Bedeuturig; die beanspruchte Erfindung 
kann nicht als auf erfinderischer Tatigkeit beruhend betrachtet 
werden, wenn die Veroffentlichung mit einer Oder mehreren anderen 
Veroffentlichungen dieser Kategorie in Verttindung gobracht wird und 
diese Verbindung fCir einen Facnmann naheliegend ist 

Veroffentlichung. die Mitglied derselben Patentfamilie ist 



Datum des Abschlusses der internationalen Recherche 



31. Mai 1999 



Absendedatum des internationalen Recherche nberichts 



07/06/1999 



Name und Postanschritt der Internationalen Recherchenbehorde 
Europaisches Patentamt. P.B. 5818 Pat6ntlaan2 
NL - 2280 HV Rijswijk 
Tel. (+31-70) 340-2040, Tx. 31 651 epo nl. 
Fax: (+31-70) 340-3016 



Bevollmachtigter Bediensteter 



Wentzel , J 



Fofmblatt PCT/lSA/21 0 <BIan 2) (JutI 1 992) 



Seite 1 von 2 



INTERNATIONALER CHERCHENBERICHT 




ionates Aktenzeichen 



PCT/EP 99/01062 



C.(Fortsetzung) ALS WESENTLICH ANGESEHENE UNTERLAGEN 



Kategorie* Bezeichnung der Veroffentlicfiung, soweit erforderlich unter Angabe dor in Betracht kommenden Teile 



Betr. Anspruch Nr. 



wo 96 32697 A (ELECTROGIG CORP) 
17. Oktober 1996 

siehe Seite 6, Zeile 15 - Seite 7, Zeile 
20 

siehe Seite 16, Zeile 8 - Seite 20, Zeile 
30 

DE 94 18 382 U (SMIT MICHAEL) 
21. Marz 1996 

siehe Seite 12, Zeile 5 - Zeile 26 

WO 97 14253 A (VON TAGEN FREDERICK W) 
17. April 1997 



1,3 



2,8,9,16 



Formblan PCT/ISA/210{Fortset2ung von Blan 2) (Juti 1992) 



Seite 2 von 2 



INTERNATIONALER 

Angaben zu Verotfentlichungen 



HERCHENBERICHT 

seiben Patentfamiire gehoren 



Inl^^^onales Aktenzeichen 

PCT/EP 99/01062 



im Recherchenbericht 
angefuhrtes Patentdokument 



Datum der 
Veroftentlichung 



Mitglied(er) der 
Patentfamilie 



Datum der 
Verotfentlichung 



uo 


9914939 


A 


25-03-1999 


GB 


2329292 


A 


17-03-1999 


uo 


9834410 


A 


06-08-1998 


AU 


5772898 


A 


25-08-1998 










ZA 


9800722 


A 


05-08-1998 


uo 


9632697 


A 


17-10-1996 


AU 


5446896 


A 


30-10-1996 


OE 


9418382 


U 


21-03-1996 


KEINE 








MO 


9714253 


A 


17-04-1997 


EP 


0860083 


A 


26-08-1998 



FoiTTtbiatt PCT/iSA/210(Anhang PatonflamaieKJuti 1992) 



1 r 



INTERNATIONALER RECHERCHENBERICHT 



Int tionales Aktenzeichen 

PCT/EP 99/01062 



A KLASSIFIZIERUNG OES ANMELDUNGSGEGENSTAf4DES 

IPK 6 H04N5/222 H04N5/272 



Nach der (nternationalen Patentklassifikaiion (IPK) Oder nach der nationalen Ktassifikatton und der IPK 



8, RECHERCHIERTEGEBIETE 



Recherchierter MindestprCrfstoff (KlassHikationssystem und Klassdikattonssymbole ) 

IPK 6 H04N GDIS 



Recherchrene aber nicht zum Mindestprufstoff gehoronde Verotlenttichungon, soweit diese unterdie recherchienen Geblete fallen 



Watirend der internationaten Recherche konsuttierte elektronische Datenbank (Name der Oatenbank und evtl. verwendete Suchbegnfle) 



C. ALS WESENTLICH ANGESEHENE UNTERLAGEN 



Kategorie" Bez&icnnuiiy der Veroffeniiichung, sowert ertdrderlich untor Angabe der in Betracht kommenden Teile 



Betr. Aaspruch Nr. 



p,x 



wo 99^14939 A (GOODMAN CHRISTOPHER ;ORAD 
HI SYSTEMS LTD (IL); TAMIR MICHAEL () 
Marz 1999 

V^iehe Seite 7, Zeile 3 - Seite 8, Zeile 11 
siehe Seite 13, Zeile 14 - Seite 14, Zeile 
3 

siehe Abb 11 dung 1 

W0-98 34410 A (GOODMAN CHRISTOPHER ;ORAD 
HI/TEC SYSTEMS LTD (IL); TAMIR MICHAEL () 
- &. August 1998 

*^siehe Seite 2, Zeile 7 - Seite 5, Zeile 12 
siehe Seite 6, Zeile 16 - Seite 13, Zeile 
10 

-/-- 



1-3,12, 
15.18 



1-3,12, 
15,18 



Weilere Veroflentlrchungen sind der Fortsetzung von Fetd C 2U 
entnehmen 



ID 



Siehe Anhang Patenttamilie 



' Besondere Kategorien von angegebenen Veroffentlichungen 

"A" Veroffenttichung, die den allgemeinen Stand der Technik definiert, 
aber nk:ht ats besonders bedeutsam anzusehen ist 

"E" alteres Dokument. das jedoch erst am Oder nach dem internationaten 
Anmeldedatum verdftentlicht w/orden ist 

"L" Verotfentlichung, die geejgnet ist, einen Prkiritatsanspruch zweifelhafi er- 
schetnen zu lassen. oder durch die das Verdtfentlichungsdatum einer 
anderen im Rechercher^erichi ganannten Veroffentlichung belegt werden 
soti Oder die aus einem anderen besonderen Grund angegeben ist (wie 
ausgefuhrt) 

"O" Verottentlichung, die sich auf eine munaiiche Offenbarung. 

eine Benutzung. eme Aussletiung Oder andere MaOnahmen bezietit 
"P" Verottentlichung. die vor dem intemationalen Anmeldedatum. aber nach 

dem beanspruchten Prioritatsdatum verottentlicht worden ist 



"T" Spatere Veroffentlichung, die nach dem intemationalen Anmeldedatum 
Oder dem Prbritatsdatum veroflentlicnt worden ist und mit der 
Anmeldung nicht kollidiert. sondern nur zum Verstandrus desder 
Erfindung zugrundeliegenden Prinzips Oder der ihr zugnjndeltegenden 
Theorie angegeben ist 

"X" Verbftenlfichung von besonderer Bedeulung; die beanspruchte Ertindung 
kann allein aufgrund dteser Veroffentlichung nicm ats neu oder auf 
erflnderischer Tatigkert beruhend t>etracht6t warden 

"Y" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann nicht als auf ertirKlerischer Tatigkeii berunend betrachtet 
v/erden. wenn die Ver6ffemiichur>g mit einer oder mehreren anderen 
Veroffentlichungen dleser Kategorie in Verbircung gebracht wird und 
diese Verbindung lur einen Fachmann naheltegend ist 

Veroffentlichung, die Mitglied dersaiben Patennamilie ist 



Datum des Abschlusses der internationaten Recherche 

31. Mai 1999 


Absendedaium des internationaien Rechercnenberichts 

07/06/1999 


Name und Postanschrift der Intemationalen Recherchenbehorde 
Europaisches Patentamt. P.B. 5818 Patentlaan 2 
NL - 2260 HV Bijswijk 
Tel. {+3t-70> 340-2040, Tx. 31 651 epo nl. 
Fax; (+31-70) 340-3016 


BevoHmachtigter Bediensteier 

Wentzel , J 



■1 



INTERNATIONALER RECHERCHENBERICHT 



In: itionates Aktenzeichen 

PCT/EP 99/01062 



C.(Fortset2ung) ALS WESENTUCH ANGESEHENE UNTERLAGEN 



Kategorie* 



Bezeichnting der Veroffentlichung, soweit ertorderlicti unter Angabe der in Betrachtkommenden Teile 



Betr. Anspruch Nr. 



wo 96 32697 A (ELECTR06IG CORP) 

11/ Oktober 1996 

lehe Selte 6, Zeile 15 - Seite 7, Zeile 
20 

siehe Seite 16, Zeile 8 - Seite 20, Zeile 
30 



06^94 18 382 U (SUIT MICHAEL) 
Marz 1996 



siehe Seite 12, Zeile 5 - Zeile 26 




97 14253 A (VON TAGEN FREDERICK W) 
17. April 1997 



1.3 



2,8,9,16 



Fnrmrxan PCT/lSA/?iO{Fons6crunq von 8ian 21 (juli 1992) 



INTERNATIONAJLER RECHERCHENBEIUCHT 

Angaben zu VGrbtfentlictiungen, die zur salben Patentfamifie gehoren 



tnt- lonales Aktenzeiclien 

PCT/EP 99/01062 



tm Recherchenbericht 
angefuhrtes Paten tdokument 


Datum der 
Veroffentlichung 


Mjtglied(er) der 
Patenttamilie 


Datum der 
Veroffentlichung 



wo 9914939 



25-03-1999 



GB 



2329292 A 



17-03-1999 



WO 9834410 A 06-08-1998 AU 5772898 A 25-08-1998 

ZA 9800722 A 05-08-1998 



WO 9632697 A 17-10-1996 AU 5446896 A 30-10-1996 



OE 9418382 U 21-03-1996 KEINE 



WO 9714253 A 



17-04-1997 



EP 0860083 A 



26-08-1998 



THIS PAGE BLANK (uspto) 




GJiBER DIE INTERNATIONALE ZUSM' 
:|P= DEM GEBIET DES PATENTV\^P 

PCT 

INTERNATIONALER RECHERCHENBERICHT 

(Artikel 18 sowie Regein 43 und 44 PCT) 



MENARBEIT 
NS 



Aktenzeichen des Anmelders Oder Anwalts 

Hi bu 990134WO 


WEITERES siehe Mitteilung uber die Ubermitttung des internationalen 

Recherchenberichts (Formblatt PCT/ISA/220) sowie, soweit 
VORGEHEN zutreffend, nachstehender Punkt 5 


Internationales Aktenzeichen 

PCT/EP 99/01062 


Internationales Anmeldedatum 
(Tag/Monat/Jahr) 

18/02/1999 


(Fruhestes) Prioritatsdatum (Tag/Monat/Jahr) 

18/02/1998 


Anmelder 

GMD - FORSCHUNGSZENTRUM INFORMATIONSTECHNIK GMBH 



Dieser Internationale Recherchenberlcht wurde von der Internationalen Recherchenbehorde erstellt und wird dem Anmelder gema3 
Artikel 18 ubermittelt. Eine Kople wird dem Internationalen Buro ubermittelt. 

Dieser Internationale Recherchenberlcht umfaf3t insgesamt _3 Blatter. 

pr| Daruber hinaus liegt ihm jeweils eine Kople der in diesem Bericht genannten Unterlagen zum Stand der Technik bei. 



1. Grundlage des Berichts 

a, Hinsichtlich der Sprache ist die Internationale Recherche auf'der Grundlage der internationalen Anmeldung in der Sprache 
durchgefuhrt worden, in der sle eingerelcht wurde, sofern unter diesem Punkt nichts anderes angegeben ist 



□ 



□ 
□ 
□ 
□ 



2. 
3. 



Die Internationale Recherche ist auf der Grundlage einer bei der Behorde eingereichten Ubersetzung der internationalen 
Anmeldung (Reget 23.1 b)) durchgefuhrt worden. 

b. Hinsichtlich der in der internationalen Anmeldung offenbarten Nucleotid- und/oder Aminosauresequenz ist die Internationale 
Recherche auf der Grundlage des Sequenzprotokolls durchgefuhrt worden, das 
I I in der internationalen Anmeldung in Schriflicher Form enthalten ist. 

zusammen mit der internationalen Anmeldung in computerlesbarer Form eingereicht worden ist. 

bei der Behdrde nachtraglich in schriftlicher Form eingereicht worden ist 

bei der Behorde nachtreiglich in computerlesbarer Form eingereicht worden ist 

Die Erkiarung, daB das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht uber den Offenbarungsgehalt der 
internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

I I Die Erkiarung, da3 die in computerlesbarer Form erfa3ten Informationen dem schriftlichen Sequenzprotokoll entsprechen, 
wurde vorgelegt 

I I Bestimmte Anspruche haben sich als nicht recherchterbar erwtesen (siehe Feld I). 
{ I Mangelnde Einheitlichkeit der Erftndung (siehe Feld II). 

Hinsichtlich der Bezeichnung der Erfindung 

PC] wird der vom Anmelder eingereichte Wortlaut genehmigt. 
I I wurde der Wortlaut von der BehCrde wie folgt festgesetzt: 



Hinsichtlich der Zusammenfassung 

I I wird der vom Anmelder eingereichte Wortlaut genehmigt. 

wurde der Wortlaut nach Regel 38.2b) in der in Feld III angegebenen Fassung von der Behdrde festgesetzt Der 
I A I Anmelder kann der Behdrde innerhalb eines Monats nach dem Datum der Absendung dieses internationalen 

Recherchenberichts eine Stellungnahme vortegen. 

Folgende Abbildung der Zeichnungen ist mit der Zusammenfassung zu verbffendichen: Abb. Nr. _J 



[X] wie vom Anmelder vorgeschlagen keine der Abb. 

I I well der Anmelder selbst keine Abbildung vorgeschlagen hat. 
I I well diese Abbildung die Erfindung besser kennzeichnet. 



Formblatt PCT/ISA/210 (Blatt 1) (Juli 1998) 



idlP-ER RECHERCHENBERICHT 



Tgternationales Aktenzeichen 
PCT/EP 99/01062 



Feld III WORTLAUT DER ZUSAMMENFASSUNG (Fortsetzung von Punkt 5 auf Biatt 1) 



line 4: after "Emi ttervorrichtungen " insert " ( 20)" 

line 4: after "Aufnahmekamera" insert"(12)" 

line 5: after "Detektorvorrichtungen" insert "(14)" 



Formblatt PCT/ISA/210 (Fortsetzung von Blatt 1 (2))(Juli 1998) 



5^ 



VERTRAG OBER^fc INTERNATIONALE ZUSaWeNARBEIT AUF DEM 

GEBIET DES PATENTWESENS ~~ 



REC'D 2 1 OCT 1999 



PCT . 

WIPO PCT" 



INTERNATiONALER VORLAUFIGER PROFUNGSBERTORI 
(Artikel 36 und Regel 70 PCT) 



Aktenzeichen des Anmelders Oder Anwalts 
Hi-bu 9901 34wo 


siehe Mitteilung uber die Ubersendung des internationalen 
WEITERES VORGEHEN vorlaufigen PrCifungsbericht (Formblatt PCT/IPEA/41 6) 


Internationales Aktenzeichen 
PCT/EP99/01062 


Internationales Anmeldedatum^Taflf/^Wonaf/Ja/rr; 
18/02/1999 


Prioritatsdatum (Tag/Monat/Tag) 
18/02/1998 


Internationale Patentklassification (IPK) oder i 
H04N5/222 


ladonale Klasstfikation und tPK 


Anmelder 

GMD - FORSCHUNGSZENTRUM INFORMATIONSTECHNIK GMBH 



Behorde erstellt und wird dem Anmelder gemaB Artikel 36 ubermittelt. 



2. DIeser BE RIGHT umfaBt insgesamt 4 Blatter einschlieBlich dieses Deckblatts. 



S AuBerdem liegen dem Bericht ANLAGEN bei; dabei handelt es sich um Blatter mit Beschreibungen. Anspruchen 
und/oder Zeichnungen, die geandert wurden und diesem Bericht zugrunde liegen, und/oder Blatter mit vor dieser 
Behorde vorgenommenen Berichtigungen (siehe Regel 70.16 und Abschnitt 607 der Verwaltungsrichtlinien zum PCT). 

Diese Aniagen umfassen insgesamt 4 Blatter. 



3. Dieser Bericht enthalt Angaben zu folgenden Punkten: 

I ^ Grundlage des Berichts 
Prioritat 

Kelne Erstellung eines Gutachtens uber Neuheit, erflnderische Tatigkeit und gewerbliche Anwendbark rt 
Mangelnde Einheitlichkeit der Erfindung 

Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erflnderische Tatigkeit und der 
gewerbliche Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

Bestimmte angefuhrte Unterlagen 

Bestimmte Mangel der Internationalen Anmeldung 

Bestimmte Bemerkungen zur internationalen Anmeldung 



II 


□ 


III 


□ 


IV 


□ 


V 




VI 


□ 


VII 




VIII 


□ 



Datum der Einreichung des Antrags 
27/08/1999 


Datum der Fertigstellung dieses Berichts 

1 9. 10. 99 


Name und Postanschrift der mit der internationalen vorlaufigen 
Prtifung beauftragten Behorde: 
^ Europaisches Patentamt 

D-80298 Munchen 
;3/' Tel. 449 89 2399 - 0 Tx: 523656 epmu d 

Fax: +49 89 2399 - 4465 


BevollmSchtigter Bediensteter ^^^^So^S^s^ 

Winzinger, E \\ } 

Tel. Nr. +49 89 2399 8733 



Formblatt PCT/IPE A/409 (Deckblatt) (Januar 1994) 
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INTERNATOONALER VORLAUFIGER 
PRUFUNGSBERICHT 



Internationales Aktenzeichen PCT/EP99/01 062 



I. Grundlage des B richts 

1 Dieser Bericht wurde erstellt auf der Grundlage {Ersatzblatter, die dem Anmeldeamt auf eine Aufforderung nach 
Artikel 14 hin vorgelegt warden, gelten im Rahmen dieses Benchts als "ursprunglich eingereicht" and sind thm 
nicht beigefugt, weil sie keine Anderungen enthalten.): 

Beschreibung, Seiten: 

1-22 ursprungliche Fassung 

Patentanspruphe, Nr.: 

-1.17 'eingegangen am 27/08/1999 mit Schreiben vonn 26/08/1999 

Zeichnungen, Blatter: 

1/5-5/5 ursprungliche Fassung 



2. Aufgrund der Anderungen sind folgende Urtiterlagen fortgefallen: 

□ Beschreibung, Seiten: 

□ Anspruche, Nr.: 

□ Zeichnungen, Blatt: 

3 □ Dieser Bericht ist ohne Berucksichtigung (von einigen) der Anderungen erstellt worden, da diese aus den 
angegebenen Grunden nach Auffassung der Behorde uber den Off enbarungsgehalt in der ursprunglich 
eingereichten Fassung hinausgehen (Regel 70.2(c)): 



4. Etwaige zusatzliche Bemerkungen: 



V. Begrundete Feststellung nach Artikel 35(2) hmsichtlich der Neuheit, der erfinderischen Tatlgkeit und 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

1. Feststellung 

Neuheit (N) ^a: Anspruche 1-17 

Nein: Anspruche 

Erf inderische Tatigkeit (ET) Ja: Anspruche 1 -1 7 

Nein: Anspruche 

Gewerbliche Anwendbarkeit (GA) Ja: Anspruche 1 -1 7 

Nein: Anspruche 



Formblatt PCT/IPEA/409 (Felder l-VIII. Blatt 1) (Januar 1994) 



INTERN ATIONALER VORLAUFIGER Internationales Aktenzeichen PCT/EP99/01062 
PRUFUNGSBERICHT - BEIBLATT ^ 



Der Prulung werden folg nd Anmeldungsunterlag n zugrunde gelegt: 



in der Fassung fur die Vertragsstaaten: 

AT BE CH DE DK ES Fl FR GB GR IT IE LI LU MC NL PT SE 



Beschreibung, Seiten: 



1-22 



ursprungliche Fassung 



Patentanspruche, Nr.: 



1-17 



eingegangen arii ; ^ 



^//uB/I QOS mil Schreiben vom 



26/08/1999 



Zeichnungen, Blatter: 



1/5-5/5 



ursprungliche Fassung 



1 . Es wird aut das tolgende Dokument verwiesen: 
WO 99 14939 A 

Der Gegenstand des geanderten Anspruchs 1 sowie die Gegenstande der abhangigen Anspruche 
2-17 erfullen die in den Artikein 33(2) und 33(3) PCT genannten Kriterien. 

Dokument D1, siehe hierzu insbesondere die Figur 1 mit zugehoriger Beschreibung auf Seite 7, 
Zeile 3 - Seite 8, Zeile 1 1 sowie Seite 13, Zeile 14 - Seite 14, Zeile 3 sowie die Patentanspruche 1 , 
13 und 17, wird als nachstliegender Stand der Technik angesehen, welcher nach Regel 5.1(a)ii PCT 
in der Beschreibungseinleitung noch nicht berucksichtigt ist. 

Ebenso sind die Anspruche nach Regel 6.2 (b) PCT noch nicht mit Bezugszeichen versehen. 

AuBerdem fehit in der Beschreibungseinleitung nach Regel 5.1 (a)iii PCT die Anpassung an den 
Wortlaut des geanderten Anspruchs 1 . 

SchlieBlich fehlen in der Figur 4 das Bezugszeichen 30 und in den Figuren 6 und 7 das 
Bezugszeichen 36. 



Formblatt PCT«eiblatt/409 (Blatt 1) (EPA- April 1997) 



INTERNATIONALER VORLAUFIGER 
PRUFUNGSBERICHT 



Internationales Aktenzeichen PCT/EP99/01 062 



2. Unterlagen und Erklarungen 
siehe Beiblatt 

VII. Bestimmte Mangel der internationalen Anmeldung 

Es wurde festgestellt. da6 die Internationale Anmeldung nach Fomn oder Inhalt folgende Mangel aufweist: 
siehe Beiblatt 



Formblatt PCT/IPEA/409 (Felder l-VIII. Blatt 2) (Januar 1994) 



0> 



FCT 



REQUEST 



The undersigned requests that the present 

international application be processed 
according to the Patent Cooperation Treaty. 



For receiving Office use only 



International Application No. 



International Filing Date 



Name of receiving Office and "PCX International Application" 



Applicant's or agent's file reference 
(if desired) (12 characters maximum) 



Box No. I TITLE OF INVENTION 

Camera tracking system for a virtual television or vide 


o studio 


Box No. II APPLICANT 


Name and address: (Family name followed by given name; for a legal entity, full official designation. 
Tlie address must include postal code aiUt name of country. The country of the address indicate in this 
Box is the applicant's State (that is, country) of residence if no State of residence is indicated below.) 

GMD - ForsGhungszentnjm 

Informationstechnik GmbH 

Schloss Blrllnghoven ' > / 

53754 Sankt Augustin 

Germany 


1 1 This person is also inventor. 


Telephone No. 


Facsimile No. 


Teleprinter No. 


State (that is, country) of nationality: 

Germany 


State (that is, country) of residence: 

Germany 


This person is applicant 1 | all designated rrri all designated States except (~| the United States | 1 the States indicated in 

for the purposes of: 1 1 States 1^ 1 the United States of Amenca 1 1 of America only 1 1 the Supplemental Box 


Box No. in FURTHER APPLICANT(S) AND/OR (FURTHER) INVENTOR(S) 


Name and address: (Family name followed by given name; for a legal entity, full official designation. 
The address must include postal code and name of country. The country of the address indicated in this 
Box is the applicant 's State (that is, country) of residence if no State of residence is indicated below.) 

FEHLIS. Hendrick 
Alter Weg 60-62 
53773 Hennef 
Germany 


This person is: 

{ 1 applicant only 

1^1 applicant and inventor 

1 1 inventor only (If this check-box 
^ is marked, do not fill in below.) 


State (that is.country) of nationality: 

Germany 


State (that is, country) of residence: 

Germany 


This person is applicant 1 1 all designated 1 | ail designated States except HTl the United States |~1 the States indicated in 
for the purposes of: 1 1 States | | the United States of Amenca l<^l of America only 1 1 the Supplemental Box 


1 I Further applicants and/or (further) inventors are indicated on a continuation sheet. 


Box No. IV AGENT OR COMMON REPRESENTATIVE; OR ADDRESS FOR CORRESPONDENCE 


The person identified below is hereby/has been appointed to act on behalf I — 1 i — 1 

of the applicant(s) before the competent International Authorities as: 1 1 ^^^^^ \ | common representative 


Name and address: (Family namefollowed by given name; for a legal entity, fiill official designation. 
The address must include postal code and name of country.) 

HILLERINGMANN, Jochen 
Bahnhofsvorplatz 1 (Deichmannhaus) 
50667 Koln 
Germany 


Telephone No. 

0221-91 65 20 


Facsimile No. 

0221-13 42 97 


Teleprinter No. 


1 1 Adress ior correspondence: Mark this check-box where no agent or common representative is/has been appointed and the 
1 — 1 space above is used instead to indicate a special address to which correspondence should be sent. 



Fonm PCT/RO/101 (first sheet) (July 1998; reprint July 1999) 



See Notes to the request form 



Sheet No. 



Continuation of Box No. HI FURTHER APPLICANTS AND/OR (FURTHER) INVENTORS 


If none of the following sub^oxes is used, this sheet should not be included in the request 


Name and address: (Family name followed by given name; for a legal entity, full official designation. 
The address must include postal code and name of country. The coumry of die address indicatm in this 
Box is the applicant's State (that is, country) of residence if no State of residerwe is indicated below.) 

MAYER. Thomas 

von-Eichendorff-Strasse 14 

53757 Sankt Augustin 

Germany 


This person is: 

1 1 applicant only 

\^\ applicant and inventor 

1 1 inventor only (If this check-box 
is marked, do not fill in below.) 


State (that is, country) of nationality: 

Gemiany 


State (that is, country) of residence: 

Geimany 


This person is applicant r— l all designated r~~| all designated States except rTT] the United States r— | the States indicated in 
for the purposes of: 1 1 States 1 1 the United States of Amenca 1 of America only 1 1 the Supplemental Box 


Name and address: (Family name followed by given name; for a legal entity, fill official designation. 
The address must include postal code and name of country. The counoy of the address indicate in this 
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Claiims 

1. A camera tracking system for a virtual television or video studio for determining 
the position and/or orientation of a recording camera, comprising: 

- at least three emitter devices for emitting electromagnetic radiation, the 
emitter devices being adapted to be mechanically coupled with the recording 
camera, 

- at least two detector devices for detecting the position of the emitter devices 
based upon the electromagnetic radiation emitted by the emitter devices, 
each detector device being adapted to detect plurality of emitter devices, 
and 

- a computer unit for evaluating the electromagnetic radiation detected by 
the detector devices and emitted by the emitter devices and for determining 
the position and/or the orientation of the at least three emitter devices relative 
to the at least two detector devices. 

2. The camera tracking system of claim 1, characterized in that the emitter 
devices are active transmitter devices for emitting the electromagnetic radiation 
towards the detecting devices or passive reflector devices for reflecting 
electromagnetic radiation towards the detector devices. 

3. The camera tracking system of claim 1 or 2, characterized in thatthe emitter 
devices are arranged on a support member adapted to be coupled with the 
recording camera. 

4. The camera tracking system of claim 3, characterized in that the emitter 
devices are arranged on the support member such that they radiate the 
electromagnetic radiation from a common side surface or from two side surfaces 
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disposed angularly relative to each other, in particular substantially at right 
angles. 

5. The camera tracking systenn of claim 3 or4, characterized in that the support 
member is a ring with an upper front face and a laterally extending circumferential 
face adjoining the front face. 

6. The camera tracking system of claim 5, characterized in that the emitter 
devices are disposed on the front face of the ring. 

7. The camera tracking system of claim 5 or 6, characterized in that the emitter 
devices are also disposed on the circumferential surface. 

8. The camera tracking system of one of claims 1 to 7, characterized in that 
the emitter devices each have a spherical emitter surface from which the 
electromagnetic radiation is radiated and/or from which it is reflected. 

9. The camera tracking system of claim 8, characterized in that the emitter 
devices each have a planar emitter surface from which the electromagnetic 
radiation is radiated and/or from which it is reflected. 

10. The camera tracking system of claims 9 and 4, characterized in that the 
emitter surfaces lie in a common side surface or in the two angled side surfaces 
of the support member. 

11. The camera tracking system of one of claims 1 to 10, characterized in 

- that a calibration device is provided that emits electromagnetic radiation 
and is designed, in particular, as a light source preferably emitting in the infrared 
range, the calibration device being detectable by the detector devices and 
the studio camera, and 
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- that the computer unit 

- determines the geometric relationship of the detecting devices relative 
to each other from the signals supplied by the detector devices upon 
movement of the calibration device and determines the geometric 
relationship of the detector devices relative to the studio from the signals 
supplied by the detector devices with the calibration device standing 
still, and 

- determines the relative position of the nodal point of the studio camera 
to the arrangement of the emitter devices coupled to the studio camera, 
from the signals supplied by the studio camera upon detecting the 
calibration device. 

12. The calibration tracking system of one of claims 1 to 11, characterized 
in that the emitter devices comprise light sources particularly emitting light 
in the infrared range, and that the detecting devices are designed as detecting 
cameras for the light from these light sources. 

13. The camera tracking system of claim 12, characterized in that the light 
sources of the emitter devices are located in recesses of the support member, 
and that the recesses are each covered by a cover that forms the emitter 
surface. 

14. The camera tracking system of claim 13. , characterized in that the covers 
diffusely radiate the light from the light sources. 

15. The camera tracking system of one of claims 12 to 14, characterized in 
that the light sources are light emitting diodes, each emitter device being 
associated with a plurality of light emitting diodes that may be switched individually, 
in groups or commonly. 
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16. The camera tracking system of claim 2 and 8 or 9, characterized in that 
the emitter surfaces of the emitter devices are designed as reflectors for 
electromagnetic radiation. 

17. The camera tracking system of one of claims 1 to 16, characterized in 
that the emitter devices may be coupled to a gyroscope supplying measured 
values and being connected to the computer unit, and that the computer unit 
processes the measured values from the gyroscope to correct the orientation 
of the emitter devices as determined on the basis of the detecting devices. 

18. The camera tracking system of one of claims 1 to 17, characterized in 
that the emitter devices are distributed irregularly. 



